Thị trấn nhỏ này từng sản xuất than gỗ và do đó được gọi là Arang (tiếng Malay: "than gỗ") - trước đây từng có một mỏ than ở dặm đầu tiên của đường bờ biển (được đặt tên là Jalan Pantai) - nhưng sau đó được xây dựng thành cảng nhỏ bởi người Anh trong giai đoạn Tái định cư khu vực Eo biển. Port Dickson còn được biết đến với tên gọi khác là Tanjung (tiếng Malay: "mũi"). Những khu vực kinh doanh lâu đời nhất tọa lạc tại bốn con phố ngay tại Jalan Lama.

Theo sử sách thì Port Dickson và Lukut gần đó là một phần của Selangor. Vào ngày 30 tháng 7 năm 1880, một hội nghị được tổ chức tại Singapore giữa Sultan Abdul Samad (người đứng đầu của Selangor), Raja Bot (người cai trị huyện Lukut), Dato' Kelana của Sungai Ujong thuộc Anh, theo đó Selangor nhường huyện Lukut cho Sungai Ujong (sau trở thành Negeri Sembilan).[1][2]

Quặng thiếc rất dồi dào tại Lukut - một khu vực thuộc Port Dickson - trong những năm 1820, thu hút những thợ mỏ nhập cư từ Trung Quốc. Người Anh cải tạo khu vực tiềm năng này thành một bến cảng, thay thế cho các cảng ở Pengkalan Kempas. Tên của người phụ trách quá trình này là Dickson, và sau đó thị trấn được đổi tên thành Port Dickson. Nhiều người khác cho rằng thị trấn được đặt theo tên của Sir John Frederick Dickson, một Bộ trưởng Thuộc địa,[3] một quan chức cấp cao của Liên Bang Malay thành lập Port Dickson và Pulau Arang vào năm 1889.[4]

Port Dickson từng trở thành một trung tâm giao thương lớn. Nhiều tuyến đường sắt được xây dựng để phục vụ cho sự phát triển của Port Dickson. Mặc dù Port Dickson phát triển khá mạnh mẽ nhưng các bãi biển đẹp vẫn được bảo vệ an toàn. Hiện nay, Port Dickson không chỉ trở thành một điểm đến du lịch nổi tiếng mà còn là nơi định cư của 524.076 cư dân.

Port Dickson cũng là nơi đóng quân của nhiều đơn vị thuộc Quân đội Malaysia như Sebatang Karah, Segenting, Si Rusa và Sunggala.[5] Tháng 9 năm 2009, Thủ tướng Najib Razak công nhận Port Dickson trở thành "Thị trấn Quân đội" để thừa nhận vai trò của quân đội tại đây trong việc bảo vệ đất nước.[6]